решительные пеньки

Год назад писал пост Дверь в космос (прохладная былина), помню мне хотелось тогда понять, что же будет через год. Это будет как бы ответ на тот вопрос. 

За этот год удалось адаптировать две технологии, которые заметно стабилизировали торговлю роботом. Первый шаг был сделан примерно в мае, в коде появилась такая сущность как «позиция», до этого это был просто параметр у сущности «счёт». Теперь стало можно открывать и закрывать несколько входов для набора и разгрузки. Как делает например prosperity или bocha. Первоначально в 2013 я этого не предусмотрел, так что менять пришлось много.
Вторая — решительные пеньки. Оказалось они куда лучше многослойного перцептрона, по неведомым причинам. По крайней мере дольше работают пока. Этот шаг я воплотил примерно в августе.

( Читать дальше )

Многие слышали про шахматную программу AlphaZero, которая научилась играть в шахматы, зная правила и играя сама с собой миллионы раз. Идея такой песочницы для роботов не новая. В простейшем виде это реализуется фитнес функцией, когда каждый робот получает оценку по какому-то критерию, например по профиту за период. Потом победители идут на второй круг, а побежденные выбывают. Для оценки по фитнес функции роботов не надо гонять против друг друга и сделать её не сложно. А вот чтобы стравливать роботов и выбирать сильнейших, тут надо придумывать песочницу.
С программисткой точки зрения задача интересная, но непонятная. Надо придумать как двигать цену, так чтобы она реагировала на роботов и чтобы результат эволюцией роботов в такой среде был бы полезен для работы в реальном рынке. Да, можно гонять роботов на истории, это готовая песочница. Максимально похожая на рынок. Но она никак не учитывает воздействия самого робота на этот рынок. 
Гоняя роботов на истории, мы по сути выращиваем  огромных травоядных динозавров. Им плохо живётся в реальной жизни, то холод, то засуха, то Трамп не в тему твитнет. Гоняя роботов против друг друга в динамической песочнице с обратной связью, можно вырастить хищников, а то и приматов, идея манит.

( Читать дальше )

Такие редкие приятные моменты, хорошо что они бывают
типа ничего не предвещало, но искусственные мозги таки что-то учуяли